[Day 2] CommonLit - Evaluate Student Summaries 介紹 - iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天

2023 iThome 鐵人賽

DAY 2

AI & Data

30天賞金獵人養成日記:在打AI競賽的路上奪命狂奔系列第 2 篇

[Day 2] CommonLit - Evaluate Student Summaries 介紹

15th鐵人賽

壓縮甜

2023-09-17 23:41:51

226 瀏覽

分享至

比賽打卡記錄：
資料集會給定 prompt 的 question, text，以及學生針對這個 prompt 寫的 summary text 和老師根據學生寫的這個 summary 針對 content 與 wording 的打分。目前的做法是先使用 all-MiniLM-L6-v2 這個 sentence simmilarity model 計算 prompt text 和 summary text 的 embedding similarity score，之後再把這個 similarity score 和 content, wording 的分數組成 (x, y) pair，拿去訓練一個 SVM model，最終在 public score 是 0.839。